SkillForge: Evolving Verifiable Skills for Reinforcement Learning Agents
SkillForge:通过可验证技能演化训练强化学习智能体
🧭 Agent 技能演化与 RL 训练优化 ★ 深度解读
AMAP, Alibaba Group
让 LLM Agent 通过显式技能调用和基于证据的验证,在 RL 训练中持续积累并修正可复用技能
📌 工作参考价值(4 点)
- 在电商导购/客服 Agent 中,可将经验从原始日志蒸馏成结构化技能(title/intent/principle/when to apply),检索时只注入 title+intent 的紧凑目录,调用后展开完整内容,能控制 prompt 长度与 KV cache,适合技能库/策略库持续膨胀的场景。
- 借鉴 evidence-based verification:对每条技能/策略模板维护 EMA 成功率与调用次数,计算 underperformance score,优先让 LLM 反思和改写高失败率策略;可用于推荐 Agent 的 prompt 模板、工具选择策略、query 改写规则库的持续治理。
- 显式技能调用标签把技能使用变成可归因事件,RL 或线上日志可直接统计哪些策略真正影响转化/点击,避免“注入一堆 prompt 但不知道有没有用”;可迁移到生成式推荐的 Semantic ID 策略库或多 Agent 工作流节点的版本管理。
- 多路径技能归纳:从成功会话抽取、失败会话提炼修正、成功/失败对比分析差异生成新策略,且弱模型演化出的技能可迁移到强模型,能降低高质量策略库的生成成本。